导读:由于链接的的指向,而导致网站内容重复,一直是网站SEO的大忌。不同的链接指向同一个网页,就会被搜索引擎判定为作弊。昨天提到的Wordpress重定向插件,在一定意义上也是为了阻止重
发表日期:2019-12-09
文章编辑:兴田科技
浏览次数:8795
标签:
由于链接的的指向,而导致网站内容重复,一直是网站SEO的大忌。不同的链接指向同一个网页,就会被搜索引擎判定为作弊。昨天提到的Wordpress重定向插件,在一定意义上也是为了阻止重复内容。然而,由于Wordpress的结构原因,往往就会发生网页内容重复的状况。例如:http://www.domain.com/archive/1 和 http://www.domain.com/archive/1/feed两个网址下的内容就是一样的,所以,我们就必须想办法阻止这样的情况发生。
通常,解决重复内容的方法有:使用noindex标签,利用excerpt实现内容摘要,以及配置robots.txt。今天就主要说说在Wordpress下使用robots.txt文件。
robots.txt文件就像一个网站的大门,它会告诉搜索引擎的蜘蛛,可以抓取哪里的网页内容,哪里的不能抓取。因此,配置好robots.txt文件,完全可以理想的组织blog内容重复的问题。robots.txt的具体文法和使用方法,可以参考robotstxt.org。在国内,此类的Wordpress robots.txt比较流行:
User-agent: *
Disallow: /wp-
Disallow: /feed/
Disallow: /comments/feed
Disallow: /trackback/
Disallow: /?s=
刚才看到 filination.com上面提到的一个robots文件,并且提供了简短的解释。刚刚接触robots.txt文件的朋友,可以参考一下:
User-agent: Googlebot
# Disallow all directories and files within
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
# Disallow all files ending with these extensions
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
# Disallow parsing inpidual post feeds, categories and trackbacks..
Disallow: */trackback/
Disallow: */feed/
Disallow: /category/*
Robots.txt因人而异,不同的人对robots有不同的理解,在加上SEO一直是一个热门话题,所以Wordpress的robots文件不会是唯一的,也不会有一个最好的。大家要是有觉得更好的,不妨分享一下。
上一篇:
朱则荣:图王与王通的软文营销境界上一篇:
茶叶行业的网站优化案例更多新闻
2023
通过本文的介绍,我们了解到佛山网站建设在企业发展中的重要性。根据不同企业的需求和目标,通过合理规划和优化网站,可以提高企业的品牌形象、市场拓展和销售效率。选择优质的佛山网站建设服务商,将有助于企业在互联网时代取得竞争优势,实现更大的商业价值。
View details
2023
引言在当今互联网时代,拥有一个优质的营销企业网站建设对于企业的发展至关重要。。通过建设一个专业、用户...
View details
2019
alexa全球排名虽然逐渐成为一种摆设,但工作之余顺便玩玩这个排名还是蛮有意思的。如何快速提高alexa排名?结合上两篇文章,今天笔者借此机会来分享下自己是如何提高alexa全球排
View details
2023
介绍在当今数字化的时代,一个强大、专业并且易于使用的公司网站对于企业的成功至关重要。。同时,随着互联...
View details